Evaluation-Verification Reward for Consistent Multi-Reference Image Editing
评估-验证奖励实现一致的多参考图像编辑
🧭 多模态评估 · 强化学习奖励
Xi'an Jiaotong University · Amap, Alibaba · Shanghai Jiao Tong University
提出多维度评估-验证奖励(EVR),用 MLLM Evaluator 和 Verifier 产生可靠细粒度信号,通过 RL 微调提升多参考编辑一致性
📌 工作参考价值(3 点)
- 对生成式推荐中的多条件约束(如风格、属性一致性)可借鉴评估-验证框架:让 LLM 生成多个评价假设,再通过规则或小模型验证证据,减轻单次评估的幻觉。
- 强化学习对齐阶段,可将细粒度多维奖励替代单一全局打分,每维度独立评估并验证,提升模型对复杂指令的遵循能力。
- 搭建自动化数据飞轮时,可复用“生成候选判断 → 证据验证 → 拒绝虚假判断”的思路,提高离线评测的可靠性,减少人工校验成本。